User-agent: *
Allow: /
# 🖼️ 15 Eyl 2026 — ÜRÜN FOTOĞRAFLARI HERKESE AÇIK.
# Ölçülen kusur: site fotoğrafları KWS Merkez'den /api/site/<marka>/urun-gorsel/<id>
# yolundan gelir; aşağıdaki "Disallow: /api/" onları da kapatıyordu. Googlebot'un
# kendi grubu (en altta "Allow: /") olduğu için Google etkilenmiyordu, ama kendi
# grubu OLMAYAN her tarayıcı "*" grubuna düşer — Pinterestbot dahil. Pinterest
# bizim ölçülen EN GÜÇLÜ kanalımız (1,85 M gösterim); zengin pin ve katalog için
# fotoğrafı çekebilmesi şart. Aynı şekilde blog sitemap'i de /api/ altındadır.
# Kural: robots.txt'te EN UZUN eşleşen satır kazanır (RFC 9309) → bu iki "Allow"
# aşağıdaki "Disallow: /api/"yi yalnız bu iki yol için ezer, gerisi kapalı kalır.
Allow: /api/site/sirketiniz/urun-gorsel/
Allow: /api/site/sirketiniz/blog-sitemap.xml
Disallow: /api/
Disallow: /cart/
Disallow: /checkout/
Disallow: /admin/

Sitemap: https://sirketiniz.com/sitemap.xml
# Blog sitemap CANLI üretilir (KWS Merkez blog motoru — yeni yazılar deploy'suz
# yayinlanir; robots.txt referansi sitemap'in /api yolunda olmasina izin verir).
# 24 Eyl 2026: blog haritası KÖK adreste (/api yolu GSC'de "Getirilemedi" verdi).
# Eski /api adresi çalışmaya devam eder (Allow satırı kalır), ilan edilen bu.
Sitemap: https://sirketiniz.com/blog-sitemap.xml

# 20 Eyl 2026 — AI arama/asistan getiricileri icin site ozeti (llms.txt sozlesmesi).
# Olculdu: /llms.txt ve /llms-full.txt GSC 404 kovasinda vardi, yani isteniyor ve bostu.
# scripts/gen-llms.mjs her derlemede canli katalogdan uretir.
# llms: https://sirketiniz.com/llms.txt
# llms-full: https://sirketiniz.com/llms-full.txt

# 26 Tem 2026 — Crawl-delay satirlari KALDIRILDI. Google zaten yok sayiyor;
# Bing/Yandex icin ise tarayiciyi yavaslatip yeni urunlerin bulunmasini
# geciktiriyordu. Site Cloudflare CDN arkasinda, tarama yuku sorun degil.
User-agent: Googlebot
Allow: /

User-agent: Bingbot
Allow: /

User-agent: Yandex
Allow: /

# 🇨🇳 20 Eyl 2026 Yönetici emri — ÇİN ARAMA MOTORLARINA KAPALI ("Çinliler Google'da bile
# bizi görmesin"). Google ülkeye göre gizlenemez; yapılabilen Çin'in KENDİ motorlarına hiç
# girmemek. Bu satırlar tavsiyedir — kesin kapı kenarda (functions/_middleware.js CIN_BOT_UA)
# ve Cloudflare WAF kuralında ("ENGEL | Çin bloğu"). Eskiden burada "Baiduspider Allow: /" vardı.
User-agent: Baiduspider
Disallow: /

User-agent: Sogou web spider
Disallow: /

User-agent: 360Spider
Disallow: /

User-agent: YisouSpider
Disallow: /

User-agent: Bytespider
Disallow: /

User-agent: PetalBot
Disallow: /
